PersonaForge:真实多轮用户模拟与 Agent 训练评估
🧭 Agent 用户模拟 · 多轮交互训练 ★ 深度解读
Peking University · Xiaomi LLM-Core · The University of Hong Kong · Renmin University of China
构建 SOUL 驱动的真实多轮用户模拟器,从真实查询反向生成 6.3K 训练数据与 138 任务基准,显著提升 Agent 交互效率与任务完成率
📌 工作参考价值(4 点)
- 构建电商导购/客服 Agent 的多轮训练数据时,优先从真实搜索/会话日志的种子 query 出发,用 LLM 反向推断用户画像与 connected memory,而不是随机生成 persona;这样能保留隐藏意图,让模型学会逐步澄清需求。
- 用户模拟器的提示词可采用 SOUL 结构:身份段落 + 抽象行为参数(消息长度、正式度、emoji)+ connected memory 固化 session 事实;避免用具体 utterance 示例,防止多样性崩溃。这一设计可迁移到任何对话式推荐/客服的仿真用户。
- 在数据合成 pipeline 中预设三阶段质量控制:生成前检查 persona 一致性,运行时用消息长度阈值(如 1500 字符,真实用户 99.2% 以下)检测角色反转,后处理过滤退化模式;可有效降低合成数据污染。
- 评测多轮推荐/搜索 Agent 时,设计渐进信息披露和嵌入矛盾的任务,并按交互效率、工具适当性、任务完成、回复质量四维打分;论文表明这类数据训练后轮次减少约 20%、无效工具调用大幅下降,同时任务完成率提升,对线上体验直接有益。
代理系统中的协同进化:走向超越人类设计的自引导进化
🧭 多智能体协同进化框架与分类
Hong Kong University of Science and Technology · University of Illinois Urbana-Champaign · The Chinese University of Hong Kong · The University of Hong Kong · Peking University
提出三阶段分类法,梳理多智能体与环境协同进化逐步摆脱人工设计约束的研究
📌 工作参考价值(4 点)
- 设计多智能体推荐系统时,可借鉴 Agent-Agent 协同进化中的对抗、协作与组织适应机制,使各策略 agent 在动态博弈中自动优化分工与交互协议,而非依赖人工静态编排。
- Agent-Environment 协同进化的思想可用于构建自适应的搜索推荐框架:将用户反馈、上下文环境作为演化压力,在线调整召回、排序、重排模块的参数或模型结构,应对数据分布漂移。
- 元协同进化为“可演化的 Agent 架构”提供思路,例如在电商 chatbot 或 query 生成 agent 中,使 prompt 模板、工具选择逻辑甚至内部思维链结构具备自我调优能力,减少人工迭代成本。
- 该综述强调的安全与可控性挑战,提醒我们在实际部署自动演化系统时需设计监控、回滚与约束机制,防止 agent 策略在长期演化中偏离业务目标。